Learning Self-Orchestration in Decentralized Agent Swarms
去中心化 Agent 群体中的自组织调度学习
🧭 去中心化多智能体自组织调度
Harvard University
提出市场机制后训练框架 MPT，让去中心化 Agent 联合学习行动策略与竞价式自组织调度，在多个多智能体任务上超越单一体模型
📌 工作参考价值（4 点）
- 多 Agent 路由/编排可直接借鉴：在电商/广告多策略召回、多工具 LLM Agent、客服多专家协作中，给每个子系统或模型加一个可学习 bidding head，代替固定路由或中心化调度；用梯度联合优化能力与参与概率，让编排自动适配流量分布变化。
- 奖励信用分配更简单：使用全局结果作为训练信号，结合 bid 记录区分贡献，不必人工设计子任务奖励；适合广告出价、多商品推荐结果融合等端到端训练场景。
- 推理时可扩展并容错：论文表明增大 Agent 池规模可提升性能且 agent dropout 损失更小；线上可将相似功能的多个模型/策略作为冗余候选池，用学到的 bid 动态启用，兼顾性能和弹性降级。
- 注意任务差异：论文验证于具身与深度研究任务，动作空间和交互协议与电商推荐有差距；迁移时需先抽象“行动”为可离散选择的策略或工具调用，并将环境状态编码为共享观测。